Swank đã từng nói rằng mình là "một diễn viên, chứ không phải một người nổi tiếng" và đã tự mô tả mình là một người ru rú ở nhà."[15] Swank tự coi mình là một người duy linh, dù không là thành viên của một tôn giáo có tổ chức[20]. Cô từng nói mình "thiên về điền kinh và yêu thể thao."[13]

Swank bày tỏ các vấn đề sức khỏe tiềm tàng, trong đó có mức thủy ngân trong người cao, qua một số việc chuẩn bị cho các vai diễn của mình, trong đó có việc tăng và giảm thể trọng khi đóng phim Boys Don't Cry và The Black Dahlia. Cô nói rằng mình sẽ "làm những gì cần thiết để vai diễn đáng tin cậy và để làm việc"."[9]

Swank kết hôn với nam diễn viên Chad Lowe ngày 28.9.1997. Hai người gặp nhau năm 1992, khi quay phim Quiet Days in Hollywood, một phim video trực tiếp.[1] Swank cảm thấy xấu hổ vì quên cảm ơn Lowe khi nhận phát biểu sau khi nhận giải Oscar lần đầu, năm 2000. Vào lúc đoạt giải Oscar lần thứ hai, năm 2005, Lowe là người đầu tiên mà cô cảm ơn. Tuy nhiên, tháng 1 năm 2006, đôi vợ chồng đã ly thân. Trong các cuộc phỏng vấn sau đó, Swank bày tỏ hy vọng là họ sẽ giải hòa, nhưng tháng 5 năm 2006, họ loan báo là sẽ ly dị.[21] Tháng 12 năm 2006, Swank xác nhận mình đã hẹn hò với John Campisi, người đại lý của mình.[22]